Núi Nhạn cao khoảng 60 mét so với mặt nước biển, có đường chu vi quanh núi khoảng trên 1 km. Núi tuy nhỏ, nhưng vì có tháp cổ ở trên nên vẫn có tên trong địa chí Nhà Nguyễn [1].

Trước đây, trên núi Nhạn có rất nhiều cây cối rậm rạp, đặc biệt là mai rừng; có nhiều loài chim như Nhạn (vì thế có tên núi Nhạn), cò và rất nhiều khỉ (nên núi còn được gọi là núi Khỉ [2]). Sau, khoảng năm 1961, vì nhu cầu quân sự, cây cối bị đốn chặt để xây dựng đồn bốt, nên khỉ và chim cũng dần bỏ đi nơi khác.

Ngày nay, đứng trên đỉnh núi Nhạn, người ta có thể thấy bao quát một vùng non nước Phú Yên với toàn cảnh thành phố Tuy Hòa, làng hoa Bình Ngọc, núi Đá Bia, Biển Đông và hai chiếc Cầu đường sắt và đường bộ dài 1.100 m bắt song song qua sông Ba.